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Введение 


Изучение биологических нейронных сетей является одним 
из приоритетных направлений современной науки. Создание 
математических моделей искусственных нейронных сетей и 
изучение их свойств представляет собой важнейший метод 
исследования в данной области. Помимо теоретического ин- 
тереса к процессам мышления, интенсивное развитие нейро- 
сетевых технологий обусловлено целым спектром практиче- 
ских запросов в медицине, экономике, физике, химии, инфор- 
матике и др. 

Возникновение теории нейронных сетей связывают с клас- 
сическими работами У. Мак-Каллока и В. Питтса [1], а также 
Д. Хебба [2] и Дж. Экклса [3]. В дальнейшем данная тео- 
рия была развита в работах Ф. Розенблатта, М. Минского, 
В. Маунткасла, Д. Эдельмена, В. Л. Дунина-Барковского, 
А. А. Фролова, Дж. Хопфилда, Т. Кохонена и др. Параллель- 
но с возникновением и изучением нейросетевых моделей раз- 
вивалось знание о биологических нейронных сетях в работах 
Э. Эндриана, Р. Лоренте Де Но, Н. П. Бехтеревой, М. Н. Ли- 
ванова, А. Н. Лебедева и др. 

Настоящее пособие написано в рамках фазово-частотного 
подхода касательно способов представления и хранения ин- 
формации в мозге. Исходя из анализа биологических дан- 
ных, предлагается новая модель нейрона — обобщенный ней- 
ронный элемент (ОНЭ). Данная модель является феномено- 
логической и создана на основе импульсной модели нейрона 
В. В. Майорова [4]. Достоинствами модели ОНЭ являются 
простота описания и реализации, а также ее универсальный 
характер. Обобщенный нейронный элемент может, в зависи- 


мости от параметров модели, функционировать как нейрон- 
пейсмейкер (автогенератор) или нейрон-детектор (пороговый 
нейрон). На основе этой модели нейронного элемента стро- 
ится простая нейронная сеть. Изучаются возникающие в та- 
кой сети устойчивые колебательные режимы. Таким образом, 
нейронная сеть оказывается способной хранить и воспроизво- 
дить информацию в динамическом виде. 


1. Математическая модель обобщенного 
нейронного элемента 


1.1. Биологическая справка 


Наиболее удачные математические модели нейронных эле- 
ментов опираются на данные о функционировании биологи- 
ческих нервных клеток. Модель обобщенного нейронного эле- 
мента в значительной степени использует свойства биологи- 
ческого нейрона. Поэтому приведем краткие сведения о стро- 
ении и функционировании биологического нейрона. 

Строение нервной клетки весьма сложно, но при модели- 
ровании естественно и целесообразно ограничиться принци- 
пиальными структурами и свойствами биологического нейро- 
на. Каждый нейрон состоит [5] из центральной части — тела, 
внутри которого находится ядро, и древовидных отростков, 
расходящихся от тела в разных направлениях. Относительно 
короткие отростки называются дендритами, а единственный 
длинный носит название аксона. Независимо от местополо- 
жения и функций, любой нейрон, подобно другим клеткам 
организма, ограничен липопротеиновой мембраной, которая 
определяет его индивидуальные границы и является хорошим 
изолятором. По обе стороны мембраны между содержимым 
клетки и внеклеточной жидкостью существует электрическая 
разность потенциалов [6]. Эту разность называют мембран- 
ным потенциалом. Своим происхождением мембранный по- 
тенциал обязан неравномерному распределению ионов по обе 
стороны мембраны. Болыпую часть времени наружная по- 
верхность мембраны электроположительна по отношению к 
внутренней. Мембранный потенциал отрицателен и велик по 
абсолютной величине (состояние поляризации). 
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В процессе функционирования нейрона наступает момент 
времени, начиная с которого мембранный потенциал быстро 
растет (абсолютная величина уменьшается), меняет знак, а 
затем так же быстро уменьшается. В результате мембранный 
потенциал снова, становится отрицательным и еще большим 
по абсолютной величине, чем в начале — мембрана приходит 
в состояние гиперполяризации. Это процесс генерации нейро- 
ном импульса, который называют спайком или потенциалом 
действия. Данный спайк распространяется по аксону до мест 
контактов с другими нейронами. Такие места контактов тра- 
диционно называются синапсами. При поступлении сигнала к 
синапсу в нем выделяются особые химические вещества — ме- 
диаторы. Под действием пришедшего спайка синапс, в зави- 
симости от типа выделяемого медиатора, оказывает возбуж- 
дающее или тормозное влияние на нейрон-приемник. По типу 
синапсов нейроны классифицируются как возбудительные и 
тормозные, поскольку каждый нейрон-передатчик образует 
синапсы только одного типа [3]. 

Начало каждого спайка связывают с достижением мем- 
бранным потенциалом порогового значения генерации. Отно- 
сительно медленный рост мембранного потенциала, из состо- 
яния гиперполяризации (после спайка) до порогового значе- 
ния генерации обусловлен рядом причин, из которых многие 
авторы [6], ["|, [8| выделяют как главную и единственную — 
возбуждение, поступающее от других нейронов. Одновремен- 
но немаловажную роль здесь играют внутринейронные меха- 
низмы, которые вносят существенный вклад в процесс депо- 
ляризации. 

В течение некоторого промежутка времени после своего 
спайка нейрон абсолютно невосприимчив к внептнему воздей- 
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ствию. Этот временной промежуток называется периодом ре- 
фрактерности. Считается, что спайк, пришедший на синап- 
сы нейрона-приемника во время рефрактерного периода, не 
вызывает выделения медиаторов. После завершения перио- 
да рефрактерности нейрон вновь становится чувствителен к 
внептнему воздействию. 

Такова в общих чертах схема функционирования биоло- 
гических нейронов — при всем их разнообразии в природе. В 
соответствии с этой схемой описывается большинство извест- 
ных математических моделей нейронных элементов. 


1.2. Формальное описание модели обобщен- 
ного нейронного элемента 


Модель ОНЭ задается набором следующих параметров: 


е р пороговое значение мембранного потенциала; 
ө г __ равновесное значение мембранного потенциала; 
ө с — скоростной параметр; 


® Тв — продолжительность периода рефрактерности (пол- 
ной невосприимчивости к внешнему воздействию): 


ө п _ количество входов (синапсов); 
ө 01, 02,...,9 — величины синаптических весов; 


ө Т, — продолжительность периода синаптического воз- 
действия (время жизни медиаторов), Ти < Тр. 


Положительные величины р, т, а, Тр и Тт не меняются 
с течением времени и одинаковы для всех элементов, входя- 
щих в состав произвольной нейронной сети. Число входов п 
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(п = 1,2,...) для каждого ОНЭ фиксировано, но, вообще го- 
воря, может быть неодинаковым для разных элементов, в за- 
висимости от архитектуры конкретной нейронной сети. Вхо- 
ды каждого элемента, (как синонимы будут использоваться 
термины "синаптические входы" или "синапсы") характери- 
зуются величинами 01, 42,... , 4», где п — число входов данно- 
го элемента. Синаптические веса а; (1 = 1,2,...,п) определя- 
ют эффективность воздействия. Если 4; > 0, то воздействие 
через синапс считается возбудительным, если 4; < 0, то — 
тормозным. 

Внутреннее состояние ОНЭ в момент времени $ задается 
следующими функциями: 


ө ((Г) — функция зависимости мембранного потенциала 
от момента, времени $; 


ө 5(1) — состояние элемента; 


ө (1) — мгновенный выходной импульс единичной ампли- 
туды. 


Функция 8(#) принимает следующие значения: 


восприимчивость 
$($) = $ генерация импульса 


рефрактерность 


Функция с(#) равна единице, когда элемент генерирует вы- 
ходной импульс (спайк). В остальные моменты времени по- 
лагаем о(#) = 0. Если о(® = 1, то данный ОНЭ оказывает 
воздействие на все связанные с ним элементы. 


Входные импульсы 01(#),02(®),....0%в(® (п — число входов 
данного элемента) зависят от момента времени $. Полагаем 
с;(Р) = 1 во все такие моменты времени Ё, когда по 1-му вхо- 
ду пришел импульс (& = 1,2,...,п). В остальные моменты 
времени 0;(#) = 0 (1= 1,2,..., т). 

Введем вспомогательные функции о'"(Ё), 05'(®),.... "(В 
При каждом отдельном ї = 1,2,...,п положим 0," (0) = 1 
при всех & Е [#;Ё + 7,,.], где Р такие, что одновременно 
$(#) = {восприимчивость} и 0;(#) = 1. В остальные момен- 
ты времени 0” (+) = 0. Таким образом, функции о" (#) — сту- 
пенчатого вида. Ступени имеют единичную высоту и длину, 
равную величине Те. 

Опишем теперь работу ОНЭ. Модель функционирует в 
непрерывном времени. В произвольный момент времени # воз- 
можен один из трех вариантов: 


• ОНЭ генерирует импульс, то есть 8(#) ={генерация им- 
пульса}; 


ө ОНЭ находится в состоянии рефрактерности, то есть 
3(Р) ={рефрактерность }; 


® ОНЭ находится в состоянии восприимчивости, то есть 
8(2) = {восприимчивость }. 


Г. Пусть 8(#) = {генерация импульса}. При этом и(®) = р, 
0(0) = 1. Импульс ОНЭ происходит мгновенно, после чего 
элемент переходит в состояние рефрактерности. То есть, при 
сколь угодно малом = > 0: (# + =) = {рефрактерность}. 

П. Пусть 8(#) = {рефрактерность }. Тогда и(®) = 0, с(#) = 
0. В состоянии рефрактерности ОНЭ невосприимчив к внеш- 
нему воздействию. Элемент находится в состоянии рефрак- 
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терности в течение промежутка времени Тр с момента, гене- 
рации спайка, после чего переходит в состояние восприимчи- 
вости. То есть, 8( + Тв) = {восприимчивость }, где 


1 = шахт О) ор (1) 


ПТ. Пусть $(#) = {восприимчивость}. Тогда функция мем- 
бранного потенциала и({) удовлетворяет дифференциально- 
му уравнению: 


и=а(т+а-ч), (2) 


где г — равновесное значение мембранного потенциала, © — 
скоростной параметр, а величина 4 определяется следующим 
образом: 


=» 4010. 
1=1 


В качестве начального условия для уравнения (2) берется зна- 
чение и(), которое определяется следующим образом: 


(Е.О), 


о Ј ё, если # > А” + Та 
Г. = Тр, если # 5 гд ых Тр 


где #1” определяется из (1), 
р, 
ЁТ 


= тахшах(т тот) =}, 
1 т< 
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р = тахта те (т) = Бо УЕ) =0. 
1 т<Е 
Здесь Ё} — момент последнего по времени импульса данного 
ОНЭ, # — момент последнего по времени входного сигна- 
ла на данный ОНЭ, Г — момент последнего по времени за- 
вершения какого-либо входного воздействия на данный ОНЭ. 
Значение ©(#) = 0. 

ОНЭ переходит в состояние генерации импульса, если ве- 
личина мембранного потенциала и({) равна пороговому зна- 
чению р. То есть, 8(#5”) = {генерация импульса}, где 

оар 
т>ї 
Если и(т) < р при всех т > ё, то ОНЭ не генерирует импульс, 
и (т) = {восприимчивость} при всех т > #. 

Разобранные случаи полностью исчерпывают возможное 
поведение обобщенного нейронного элемента. 

Поясним формальное описание. Обобщенный нейронный 
элемент имитирует деятельность биологического нейрона. Та- 
ким образом, ОНЭ способен находиться в одном из трех со- 
стояний — восприимчивости, генерации импульса (спайка) и 
рефрактерности. Процесс перехода зависит как от внутренне- 
го состояния ОНЭ, так и от сигналов, поступающих на входы 
данного элемента от других ОНЭ. Переход от восприимчи- 
вости к генерации импульса осуществляется мгновенно по- 
роговым образом и сопровождается генерацией единичного 
выходного сигнала. После этого элемент также мгновенно пе- 
реходит в состояние рефрактерности. Через некоторый про- 
межуток времени Тв после генерации спайка элемент возвра- 
щается в состояние восприимчивости. 


И 


2. Свойства и функционирование обобщен- 
ного нейронного элемента 


2.1. Простейшие свойства модели обобщен- 
ного нейронного элемента 


Рассмотрим основные свойства модели обобщенного ней- 
ронного элемента. Оформим их в виде утверждений. 

Утверждение 2.1. Для любого ОНЭ функция его мем- 
бранного потенциала и) непрерывна при всех і, кроме 1 = Ё 
таких, что 3(Р) = {генерация импульса}. 

При этом для каждого такого Ё: „іп , ОЕ у, 

шп (В = 0. 
1—э1*+0 

Доказательство. Из формального описания следует, что 
и(Е) = 0 при всех Ё таких, что 8(#) = {рефрактерность}. Если 
8(2) = {восприимчивость}, то функция мембранного потенци- 
ала и(Р) удовлетворяет дифференциальному уравнению (2). 
Величина 4 при каждом фиксированном Ё равна констан- 
те. Решение уравнения (2) представляет собой непрерывную 
функцию при всех $. 

Выберем момент времени #" такой, что 3(Р) ={генерация 
импульса}. Из формального описания вытекает, что и(Ё) = 
р. Функция ш(#) непрерывна в левой окрестности точки Ё“. 
Поэтому имеет место равенство „ш А реш): 

Генерация импульса происходит мгновенно. После этого 
элемент переходит в состояние рефрактерности. При сколь 
угодно малом = > 0: 3(#*+=) = {рефрактерность} и и(#+=) = 
0. Поэтому имеет место равенство ‚Шт 0400) = 0. Утвержде- 
ние доказано. 

Утверждение 2.2. Пусть синатитические веса д; удовле- 
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творяют неравенству 4; > 0 при всет 1 = 1,...,п. Тогда на 
участкат непрерывности функция щъ) — неубывающая. 


Доказательство. Из формального описания следует, что 
и(2) = 0 при всех ф таких, что 8(#) = {рефрактерность}. Если 
8(2) = {восприимчивость}, то функция мембранного потенци- 
ала и(®) удовлетворяет дифференциальному уравнению (2). 

п, 
Причем величина 4 = У? 9:0!" (#) при каждом фиксированном 


фи условии 4; > 0 Ва неотрицательной константе. Вели- 
чины т и а положительны. Поэтому решение уравнения (2) 
представляет собой возрастающую функцию. Утверждение 
доказано. 

Утверждение 2.3. Пусть 4; > 0 при всет 1 = 1,...,пт, 
и найдется такой момент времени #, что 0 < и(Й) < р. 
Тогда функция и(Р) удовлетворяет неравенству 0 < и(® < р 
при всет і >Р. 


Доказательство. Результат утверждения следует из ут- 
верждений 2.1. и 2.2. Утверждение доказано. 

Таким образом, если для произвольного ОНЭ в нулевой 
момент времени задать такое значение мембранного потен- 
циала (0), что 0 < и(0) < р, то обеспечивается выполнение 
неравенства 0 < и(® < р при всех # > 0. Для всех элементов 
конкретной нейронной сети условие 0 < и(0) < р далее будем 
предполагать выполненным и опускать. 


2.2. Частные случаи функционирования 
обобщенного нейронного элемента 


Отдельно рассмотрим два важных частных случая функ- 
ционирования обобщенного нейронного элемента. Во-первых, 
поведение ОНЭ при отсутствии входных импульсов (без внеш- 
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него воздействия). Во-вторых, поведение ОНЭ при поступле- 
нии одного входного импульса (под действием одного внеш- 
него воздействия). Оформим результаты в виде двух утвер- 
ждений. 

Утверждение 2.4. Пусть о; (®) = 0 при всет і = 1,...,п 
ифЕ (Н’-Тв; Ё), где моменты времени В” и 1 такие, что 


оо, если а(т) =0 при всетт > Е} 


Тогда при 1 Є (Е + Тв; 5?) функция и(®) определяется 
следующим. образом: 


(В =т- пе т (3) 


Доказательство. Приё є (1+7; 6): (6) ={восприим- 
чивость}. Поэтому, согласно формальному описанию, функ- 
ция и(К) удовлетворяет дифференциальному уравнению (2). 
Условие оз(®) = 0 (1 = 1,2,...,п) означает, что 4 = 0 при 
Е [0 + Тр; 15). Поэтому уравнение (2) принимает вид: 


и = а (г — и). (4) 


5 
Начальное условие: и(#” + Тв) = 0. Решение уравнения (4) 
задается формулой (3). Утверждение доказано. 

Отметим, что если #57 52 оо, то в момент времени #5” ОНЭ 
вновь сгенерирует выходной импульс (спайк). После этого 
ОНЭ окажется в состоянии рефрактерности, выйдет из него 

8р 8р 
в момент времени $, + Тр, и так далее. Если $5 = оо, то есть 
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равенство и(#) = р не будет достигнуто ни при каком # > у, 
то мембранный потенциал будет стремиться к состоянию рав- 
новесия т. 

Перейдем теперь к рассмотрению более сложного поведе- 
ния ОНЭ в случае одного внешнего воздействия. 

Утверждение 2.5. Пусть существуют единственные 
номер і @&=1,...,п) и момент времени“ є (ЕР+Тв; Е?) та- 
кие, что с:(Ё) = 1. Моменты времени Ё? и’ < оо опреде- 
лены в утверждении 2.4. в предположении, что существу- 
етт > Ер такое, что о(т) = 1. Кроме того, выполняется 
неравенство # + Ти > Б. 

Тогда при ї є (6 + Тр; ё] функция (6) определяется по 
формуле (3), а при т є (2, 5?) — следующим образом: 


ив = тъ е 0 (е) -т- 4. (5) 


Доказательство. При ? є (Тр; 6”): (0) ={восприим- 
чивость }. Функция и(Р) удовлетворяет дифференциальному 
уравнению (2). 

Пусть ё Е (6 + Тр; і*). Тогда выполняется условие с;(#) = 
О (1 = 1,2,...,п), ид = 0 при ѓ є (#? + Тр; і). Поэто- 
му уравнение (2) принимает вид (4) с начальным условием: 
и(6 + Тр) = 0. Решение уравнения определяется форму- 
лой (3). 

Пусть Ё = РЁ. Тогда, по условию утверждения, 4 = 9;, где 
4; — синаптический вес 1-го входа. Уравнение (2) принимает 
вид: 


и=а(т-+а:-м). (6) 


15 


В качестве начального условия берется и(Ё). Поэтому 
^а(#—Р— 
и(® =и(Ё) =т-те а 7 


Пусть теперь Ё Е (*; +). Тогда, согласно условиям утвер- 
ждения, #5 — конечное число. Причем #*+Т,, > 5 ио"(Ё = 
1 при всех ? Є (0%; 2). То есть имеющееся воздействие пе 
завершится раньше, чем исследуемый ОНЭ сгенерирует им- 
пульс. Кроме того, 4 = 4, где 4; — синаптический вес 1-го 
входа. Поэтому уравнение (2) принимает вид (6) с началь- 
ным условием и(Ё). Решение уравнения определяется фор- 
мулой (5). Утверждение доказано. 

Эти утверждения будут использоваться при дальнейшем 
изучении нейронных сетей ОНЭ различной архитектуры. 

Формально определенная динамика мембранного потенци- 
ала ОНЭ соответствует развитию потенциала биологического 
нейрона. Она согласуется с "базовой нейронной моделью" [9]. 
Действительно, в течение периода, рефрактерности мембран- 
ный потенциал принимает наименьшее значение (для удоб- 
ства исследования взятое равным нулю). После выхода ОНЭ 
из состояния рефрактерности мембранный потенциал растет 
в соответствии с дифференциальным уравнением (4) и ре- 
зультатом утверждения 2.2. В случае внешнего воздействия 
мембранный потенциал испытывает ускоренный рост при воз- 
будительном воздействии и замедленный — при тормозном. 
Это вытекает из уравнения (2) и его частного случая (6). 

Модель обобщенного нейронного элемента близка к моде- 
ли биологического нейрона, построенной на основе диффе- 
ренциальных уравнений с запаздыванием [4]. При этом мо- 
дель ОНЭ отличается простотой описания и позволяет избе- 
жать технических трудностей, связанных с интегрированием 
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систем дифференциальных уравнений с запаздыванием. 


2.3. Универсальный характер обобщенного 
нейронного элемента 


Болыпинство моделей нейронных сетей может быть раз- 
делено на два класса. К одному из них относятся сети, эле- 
менты которых не способны к авторитмичности (нейроны- 
детекторы или пороговые нейроны). При этом сеть в целом 
обладает способностью функционировать в колебательном ре- 
жиме за счет взаимодействия отдельных нейронов или ней- 
ронных ансамблей. Примерами таких сетей являются сеть 
Винера [10], сети из интегративно-пороговых нейронов Хоп- 
филда [11], сети из №-нейронов [12] и др. 

Другой класс образуют нейронные сети, состоящие из эле- 
ментов, обладающих авторитмичностью (нейроны-пейсмей- 
керы, или автогенераторы). К этому классу относятся сети на 
основе модели Ходжкина — Хаксли (при специальном выборе 
параметров уравнений) [6], различных феноменологических 
моделей, а также всевозможные осцилляторные сети, в том 
числе на основе популярной модели Вилсона ~ Коуэна [13]. К 
этому же классу относятся сети нейронных клеточных эле- 
ментов [14|]. Как показывают биологические исследования, 
нервные клетки обоих типов присутствуют в биологических 
нейронных сетях, в том числе и в человеческом мозге. 

Предлагаемая модель обобщенного нейронного элемента 
носит универсальный характер. Обобщенный нейронный эле- 
мент, в зависимости от выбранных параметров, может вести 
себя и как нейрон-детектор, и как нейрон-пейсмейкер. Имеет 
место следующее утверждение: 

Утверждение 2.6. Пусть на произвольный ОНЭ не ока- 
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зывается внешнего воздействия. Тогда если р < т, то ОНЭ 
ведет себя как нейрон-пейсмейкер, то есть периодически ге- 
нерирует импульсы. Временной промежуток автогенерации 
ТА определяется из соотношения: 


2 Ех рей 
е-“(ТА-Тв) = Е (7) 
7’ 
Если р > т, то ОНЭ ведет себя как нейрон-детектор, то 
есть не будет, генерировать импульсы. 


Доказательство. Рассмотрим произвольный ОНЭ, кото- 
рый сгенерировал импульс в момент времени #1”. Величины 
И и 6 определены в утверждении 2.4. Согласно данному 
утверждению, при Ё Є (Е + Тв; 1) функция и(®) задается 
формулой (3). В частности, при всех $ имеет место неравен- 
ство и(® < т. ОНЭ генерирует импульс, когда имеет место 
равенство и(#) = р. Отсюда вытекает, что если р > т, то ОНЭ 
не сможет сгенерировать ни одного импульса при Ё > {++ Тр. 

Пусть теперь р < т. Тогда ОНЭ генерирует импульс в 
момент времени #5’, определяемый из соотношения 


а(БР-НР-Тр) 


АРТ = р. 


Выражая отсюда величину Та = №7 — Р, получаем форму- 
лу (7). Утверждение доказано. 

Таким образом, модель обобщенного нейронного элемента 
способна решать более широкий класс задач, чем специали- 
зированные модели детекторов или пейсмейкеров. В рамках 
дальнейшего исследования обобщенных нейронных элемен- 
тов предлагается рассмотреть задачи хранения и воспроизве- 
дения информации при помощи различных типов нейронных 
сетей, состоящих из обобщенных нейронных элементов. Для 
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этого целесообразно ввести следующую терминологию. Обоб- 
щенный нейронный элемент, для которого выполняется усло- 
вие р < т, будет называться ОНЭ-пейсмейкером. Обобщен- 
ный нейронный элемент, для которого выполняется условие 
р > т, будет называться ОНЭ-детектором. 
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3. Пачечная активность в сети обобщенных 
нейронных элементов 


В этом разделе рассматривается задача поведения обоб- 
щенного нейронного элемента, под действием пачечной актив- 
ности. Под пачечной активностью понимается группа, тесно 
следующих по времени импульсов. Этот феномен обнаружи- 
вается во многих биологических нейронных сетях, в том числе 
в человеческом мозге. Задача поведения ОНЭ под действием 
пачечной активности представляет самостоятельный интерес. 
Кроме того, результаты данной задачи можно использовать 
в более сложных задачах, связанных с дальнейшим изучени- 
ем сетей обобщенных нейронных элементов. Поэтому пред- 
ставляется целесообразным решить задачу поведения ОНЭ 
под действием пачечной активности в общем случае — и для 
ОНЭ-пейсмейкеров и для ОНЭ-детекторов. 


3.1. Организация пачечного воздействия в 
сети обобщенных нейронных элементов 


Опишем нейронную сеть для изучения пачечного воздей- 
ствия на обобщенный нейронный элемент. 

Рассмотрим некоторую произвольную нейронную сеть, со- 
стоящую из М обобщенных нейронных элементов. Предпо- 
ложим, что т элементов данной сети (т < №) последова- 
тельно генерируют импульсы периодическим образом в мо- 
менты времени #1,1,..., ш;: Н+ТЬ+Т,... Шщ+Т;...: 
И АГ, 6 + АТ,..., ш- ЕТ; ... При этом каждый 1-й эле- 
мент (1 = 1,2,...,т) генерирует импульсы в моменты време- 
ни +ТЕ-+2Т,..., В +АГ,... Ограничения на величину 
Т будут рассмотрены ниже. 
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Пусть каждый из этих т элементов соединен локальной 
синаптической связью с еще одним (т + 1)-м элементом, по- 
ведение которого и будет исследоваться. Обозначим соответ- 
ствующие синаптические веса как 401, 42,...,9т; @& > 0 при 
всех і = 1,2,...,т. Других связей у исследуемого (т + 1)- 
го элемента нет. Исследуемый элемент, таким образом, имеет 
т входов. Параметры р, т, а, Тр и Т» одинаковы для всех 
т + 1 элементов сети. Данный фрагмент произвольной ней- 
ронной сети будет служить объектом изучения пачечного воз- 
действия на обобщенный нейронный элемент. 

Подчеркнем, что все т + 1 элементов одновременно мо- 
гут быть либо ОНЭ-пейсмейкерами, либо ОНЭ-детекторами. 
Задача пачечного воздействия будет решена, в обоих этих слу- 
чаях. 

Дадим постановку задачи. Для этого введем необходимые 
обозначения и определения. 

Приурочим нулевой момент времени к выходу исследуемо- 
го элемента из состояния рефрактерности перед тем, как он 
испытывает первое воздействие со стороны первого элемен- 
та (в момент времени #1). В соответствии с описанием сети, 
моменты времени #1, ?ә,...,Ёһ упорядочены следующим об- 
разом: 0 < В <Ь <...., < +. Согласно архитектуре сети, 
данная последовательность из т импульсов воздействует на 
исследуемый (т + 1)-й элемент. 

Определение 3.1. Пусть исследуемый элемент в мо- 
мент времени Еу находится в состоянии восприимчивости. 
Если для моментов времени Н,Ъ,..., т выполняется нера- 
венство и < Н + Т, то будем называть воздействие па- 
чечным, а саму последовательность из т таких импульсов 
— пачкой или берстом. 
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Биологический смысл данного определения в том, чтобы 
импульс последнего элемента пачки происходил перед тем, 
как разрушится медиатор в первом синапсе исследуемого эле- 
мента. 

Определение 3.2. Пусть на обобщенный нейронный эле- 
мент действует пачка импульсов. Будем говорить, что он 
непосредственно реагирует, на эту пачку, если выполняется 
неравенство и < 1р < Н + Т, где +, — момент импульса 
исследуемого элемента. 

Биологический смысл данного определения в том, чтобы 
импульс исследуемого элемента происходил после начала вы- 
деления медиатора в т-м синапсе, но раньше, чем распался 
медиатор в первом синапсе. 

Наложим на рассматриваемую нейронную сеть необходи- 
мые ограничения. Величину Т, введенную ранее, будем назы- 
вать периодом пачечного воздействия. В том случае, если рас- 
сматриваемая нейронная сеть состоит из ОНЭ-пейсмейкеров, 
то положим: 


ТЬ Р (8) 


где Та — период автогенерации импульсов ОНЭ-пейсмейке- 
ром, определяемый по формуле (7). В том случае, если рас- 
сматриваемая нейронная сеть состоит из ОНЭ-детекторов, то 
положим: 


аре, (9) 


Поясним эти неравенства. С одной стороны, величина Т не 
должна быть слишком малой, чтобы к моменту начала оче- 
редной пачки исследуемый элемент успел отреагировать на 
предыдущую пачку и выйти из состояния рефрактерности. С 
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другой стороны, период воздействия не должен быть слиш- 
ком велик, чтобы исследуемый элемент не успевал самостоя- 
тельно сгенерировать импульс — в случае ОНЭ-пейсмейкеров. 
Для ОНЭ-детекторов это не обязательно, поскольку они не 
способны к самостоятельной генерации импульсов и величи- 
на Та теряет смысл. 

Кроме того, если рассматриваемая нейронная сеть состоит 
из ОНЭ-детекторов, то веса 41, 42,..., т должны удовлетво- 
рять неравенству 


т + Ў: о. (10) 
і=1 


В противном случае пачечное воздействие окажется слишком 
слабым и исследуемый детектор не сможет сгенерировать им- 
пульс. Это вытекает из модели обобщенного нейронного эле- 
мента и утверждения 2.6. В случае ОНЭ-пейсмейкеров данное 
условие не обязательно. 

Поставим задачу исследовать поведение обобщенного ней- 
ронного элемента под действием периодического пачечного 
воздействия. Решим эту задачу как в случае ОНЭ-пейсмейке- 
ров, так и в случае ОНЭ-детекторов. 


3.2. Изучение пачечного воздействия на об- 
общенный нейронный элемент 


Для удобства дальнейшего исследования введем дополни- 
тельные обозначения. 

Состояние исследуемого ОНЭ обозначим $(#), функцию 
его мембранного потенциала — и(®). В нулевой момент време- 
ни исследуемый элемент вышел из состояния рефрактерности 
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перед поступлением первой пачки. То есть 8(0) ={восприим- 
чивость}, (0) = 0. 

В целях удобства изложения дальнейших выкладок пере- 
обозначим моменты Ё; + (71 = ПТ 7-го импульса 1-го элемен- 
та как 1. Будем называть 7-й пачкой (7 = 1,2,...) последо- 
вательность импульсов в моменты времени 6, Ы, РЕР К Мо- 
мент генерации спайка исследуемым элементом под действи- 
ем 7-Й пачки обозначим как 9 Введем также обозначения 
&; для временных рассогласований между моментами 1-го и 
(2 — 1)-го импульсов пачки: 


где 1 = 2,3,...,т. Запаздывание спайка исследуемого эле- 
мента относительно последнего импульса пачки обозначим 
как & = А – 0. 

Для условия пачечного воздействия К штук пачек необхо- 
димо, чтобы моменты времени б | ГА удовлетворяли следую- 
щему неравенству: 


ОО И РТ (11) 


при:всеху = Т.Е. 
Применительно к временным рассогласованиям &;, Є? усло- 
вие (11) записывается в виде: 


и! 
0 > 0 (19) 
1—2 

Пр ВоВ 
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Имеет место следующая лемма. 

Лемма 3.1. Пусть две одинаковые пачки из т импульсов 
поступают, на синатсы (т + Т)-го обобщенного нейронного 
элемента с периодом Т. Данный элемент, непосредственно 
реагирует на кажодуо такую пачку, то есть величины рас- 
согласований &;, &7 удовлетворяют, условиям (12) при = 
2,3,...,т; 1 = 1,2. При этом, в случае ОНЭ-пейсмейкеров 
выполняется условие (8), в случае ОНЭ-детекторов — усло- 
вия (9) — (10). 


Тогда рассогласование & может быть выражено через 


рассогласования &2, &3,..., &т, & следующим образом: 
т -а У, 15 
ие Че: 3 
2 1 Те а(Т Тр) 1—1 
ОЕ аЙ — (13) 


проф РЕ) О-о 
1—1 


Доказательство. Рассмотрим поведение (т + 1)-го эле- 


мента при $ > р то есть начиная с момента генерации им 


первого своего спайка. На промежутке времени К КЬ + Тв] 


ОНЭ находится в состоянии рефрактерности. В момент вре- 


) 


мени і;, + Тр исследуемый элемент выходит из состояния ре- 
Фрактерности, и(01,+Тр) = 0. С этого момента величина мем- 
бранного потенциала и(ї) возрастает. Первый импульс второй 
пачки поступил в момент времени И (НЙ > В, + Тк). Под 
действием пачки импульсов величина мембранного потенци- 
ала исследуемого элемента и({) увеличивается и достигает в 
конце концов величины порогового значения р. Как только 
величина мембранного потенциала становится равной поро- 
говому значению, исследуемый элемент генерирует импульс. 
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2 (+2 2 
Это происходит в момент времени %», (#5, > &,). Такое пове- 
дение исследуемого элемента, вытекает из условий (12), а так- 
же специфических условий (8) — в случае ОНЭ-пейсмейкеров 
либо (9) — (10) — в случае ОНЭ-детекторов. 

Рассмотрим промежуток времени [#,; 72]. На этом проме- 
жутке времени формула изменения мембранного потенциала 
исследуемого элемента, в соответствии с общим дифференци- 
альным уравнением (2) модели ОНЭ, имеет вид: 


т, ЕЕГ т, 
и = + ше" ще) -г- У а]. (14) 
1=1 1=1 


Значение мембранного потенциала и(Ё,) выражается следу- 
ющим образом: 


т-—1 
и) =т+У`ш-+е "ще, р) -т- У а). 
1=1 ? 


Рассуждая аналогичным образом и последовательно рассмат- 


ривая моменты времени Ё и р ро получаем в общем 


т—1? “%т—2› * 
виде: 


где п принимает значения 1, 2,...т — 2. В момент времени Е 
имеем: 


и(Р) = т — ге @-№-Тв). (16) 
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Последовательно подставим выражения (15) и (16) в фор- 
мулу (14). После упрощений формула (14) приобретает сле- 
дующий вид: 


= тг + >. а:— %-5р-Т) {| У фе б) (17) 


Преобразуем величины 2—1, = ТЕ и1—12 (5 = 1,2,...,т-– 
1) следующим образом: 


И -Ть = (0-6) (0, (0+7) = 
Е (ТТ 61), 


і-й = ха) 
і=2 

1-6 = Уа +(#- 4), 
1—3 


т, 


[-& = У 65+(- 6), 


ЕН 
1 = &+(-&. 
В результате формула (17) примет следующий вид: 
обе = еее, 


т —а( У ,+1—2,) 
+ Уфе 2% ]. 
= | 


В момент времени =, происходит генерация импульса, по- 
этому и(Ё,) = р. Получаем: 


т, 


«5 є 
а У Уде ета = р 


1=1 
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откуда вытекает соотношение (13). Лемма доказана. 

Данная лемма связывает рассогласования &! и &? иссле- 
дуемого элемента, то есть задержки в генерации им спайков 
под влиянием первой и второй пачек соответственно. 

Результат леммы 3.1. может быть легко обобщен на случай 
двух любых поступающих друг за другом пачек. Тогда в соот- 
ношении (13) будут фигурировать не рассогласования &1 и &?, 
а величины & и &^ +1 (Ё > 1), представляющие собой задерж- 
ки в генерации спайка исследуемым элементом под действием 
К-й и (К + 1)-й пачек соответственно. Имеет место следствие 
из леммы 3.1. 

Следствие 3.1. Пусть (т + 1)-й обобщенный нейронный 
элемент непосредственно реагирует на К-ю и (Е + 1)-ю пач- 
ки из т импульсов. При этом (Е + 1)-я пачка начинается 
через промежуток времени Т после начала К-й пачки. Ве- 
личины, рассогласований &;, &7 удовлетворяют условиям (12) 
при всех 1 = 2,3,....т;1=1,2,..., Е-1. Кроме того, в слу- 
чае ОНЭ-пейсмейкеров выполняется условие (8), а в случае 
ОНЭ-детекторов — условия (9) — (10). 

Тогда рассогласование 6 может быть выражено через 


рассогласования 62, 23,..., бт, &^ следующим образом: 
т —@ № ‚9 
ат ОО < 
те а(Т Тр) = 
Б 7 И: ЕЕ (18) 


т, т, 
Р-р отар 
1=1 1=1 


Доказательство. Доказательство проводится аналогич- 
но доказательству леммы 3.1. Случай А = 1 в точности соот- 
ветствует доказанной лемме. Следствие доказано. 
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Отметим два важных частных случая. Если все синапти- 


ческие веса связей одинаковы, то есть 41 = фф =... = 49 = 9, 
то формула (18) приобретает вид: 


9 
1=1+-1 
ча а В 
е и ЕСЕ о 90: = ЕВ (19) 
тд ЕЕ 
Если в состав пачки входят только два элемента, то есть 
т = 2, то формула (18) приобретает вид: 


Е Г ыы 3 теб ъф (20) 
7+ +0 -р т+ф@ +Ф – р 

Эти соотношения могут быть использованы в более слож- 
ных задачах, связанных с дальнейшим изучением сетей обоб- 
щенных нейронных элементов. Например, формула (19) мо- 
жет быть использована при изучении распространения воз- 
буждения в сетях ОНЭ-детекторов модульной архитектуры, 
а формула (20) - при изучении механизма последовательной 
адаптации в задачах адаптации обобщенных нейронных эле- 
ментов. 

Рассмотрим теперь поведение элемента, когда на него воз- 
действует бесконечная последовательность одинаковых па- 
чек. Имеет место следующая теорема. 

Теорема 3.1. Пусть одна и та же пачка из т импулъ- 
сов поступает на синатсы (т + 1)-го обобщенного нейронно- 
го элемента с периодом Т. Данный элемент, непосредствен- 
но реагирует на каждую такую пачку. Величины рассогла- 
сований &;, & удовлетворяют условиям (12) при всет 1 = 
2,8,...,т;7] = 1,2,... Кроме того, в случае ОНЭ-пейсмейке- 
ров выполняется условие (8), а в случае ОНЭ-детекторов — 


условия (9) — (10). 
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Если выполняется неравенство 


т, 
ге 1-1) < р У: =, (21) 
1=1 


то периодическое пачечное воздействие навязывает, иссле- 
дуемому элементу свою частоту генерации импульсов. При 
этом последовательность рассогласований {27} (1 = 1, 2,...) 
имеет предел &*, который может быть найден по формуле: 


1 В 
е-щв (5). (29) 


А = (пе7%07—78)) (+ Ууф – р), 
1—1 


т, 


где 


т а }; & 


в= (ае Нее) 


Доказательство. Условия теоремы таковы, что выпол- 
няется результат следствия 3.1. В формуле (18) положим: 


= 
1—1 


т, 


рле 25 
В этих обозначениях формула (18) примет вид: 


ук+ = Аук + В, 
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И 

Из условия (21) следует, что А < 1. Поэтому для выпи- 
санного рекуррентного соотношения ур — у“ при К — оо, где 
у’ = В/(1-— А). Но у* = е. Из равенства е = В/(1 – А) 
получается в точности формула (22). Таким образом, для по- 
следовательности {'} (1 = 1,2,...) существует предел &*, ко- 
торый может быть найден по формуле (22). Теорема доказа- 
на. 

Аналогичный результат можно получить и для соотноше- 
ний (19), (20) как частных случаев формулы (18). Доказанная 
теорема носит общий характер, будучи верной и для ОНЭ- 
пейсмейкеров и для ОНЭ-детекторов. 
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Заключение 


В данном пособии на, основе биологических предпосылок 
разработана новая нейронная модель — обобщенный нейрон- 
ный элемент. Эта, модель носит универсальный характер, бу- 
дучи способной, в зависимости от своих параметров, функци- 
онировать в режиме нейрона-пейсмейкера или нейрона-детек- 
тора. Предложена модель взаимодействия обобщенных ней- 
ронных элементов. Приведены основные свойства обобщенно- 
го нейронного элемента, разобраны важные частные случаи 
функционирования модели. Разработан метод анализа, сетей 
обобщенных нейронных элементов. Исследована пачечная ак- 
тивность обобщенных нейронных элементов. Доказано, что 
пачечная активность в сети обобщенных нейронных элемен- 
тов способна, навязывать отдельным элементам свой колеба- 
тельный режим (механизм синхронизации). 

Полученные результаты целесообразно использовать при 
дальнейшем изучении различных сетей обобщенных нейрон- 
ных элементов. В таких сетях, в частности кольцевых струк- 
турах, локальных сетях на плоскости, многоуровневых сетях 
модульной архитектуры, при специальном выборе парамет- 
ров возможно существование устойчивых колебательных ре- 
жимов нейронной активности. В ряде случаев этими режима- 
ми можно управлять в процессе функционирования сети. Тем 
самым сети обобщенных нейронных элементов оказываются 
способны хранить и воспроизводить информацию, представ- 
ленную в динамическом виде, а также успешно подвергаться 
адаптации. 
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